مرجع مقالات رسمی سئو

همان‌طور که گفتیم دارایی خزش تعداد صفحاتی میباشد که گوگل تصمیم می‌گیرد در یک زمان معین سایت شما را مرور می کند که این ترازو می‌تواند، متعدد باشد ولی روی هم رفته یک مقدار پایدار میباشد.

تعداد صفحاتی که گوگل آنها را مرور می کند محدودیتی ندارد یعنی ممکن میباشد 6 صفحه از سایت در روز مرور گردد یا 400,000 . پس جمعاًَ با تمرکز به معیارهایی این واحد سنجش گزینش میگردد که بعدا راجب آن سخن میکنیم.

چرا موتورهای جستجو بودجه خزش را برای وب سایت ها در نظر گرفتند

با توجه به اینکه میلیون‌ها شیت تازه روزانه به تارنما ها اضافه می گردد و تعداد آنان محدودیتی ندارند. بدین ترتیب ایندکس صفحات نیاز به تقدم‌بندی دارااست تا ربات های گوگل بتوانند این عمل را انجام دهند.

ترازو بودجه خزش برای وبسایت چطور تعیین میشود

دو برهان وجود دارد تا میزان دارایی خزش صفحه های انتخاب شوند، محدودیت خزش  (Crawl Limit ) و تقاضای خزیدن ( Crawl Demand ) ، که در قسمت ذیل به تشریح هر یک می پردازیم.

محدودیت خزش بر طبق منابع سرور (Crawl Limit / Host Load )

حد خزیدن بخش مهمی از میزان دارایی خزش به حساب می آید. به همین مراد ربات های گوگل به گونه ای طراحی شدند تا از اضافه بار سرور دوری کنند و با احتیاط بیشتری صفحه ها وب را مرورکنند.

اکنون دست اندرکاران مختلفی روی حد خزیدن اثرگذار می‌باشد به عنوان مثالً اگر تارنما شما با چندین وب سایت دیگر روی یک سرور مشترک اجرا شده باشد و شما یک تارنما بلندمرتبه در دست داشته باشید، خزش در وب سایت بسیار محدود اعمال می‌گردد. سئو در مشهد در این حالت‌ عالی میباشد از یک هاست منحصر به فرد به کارگیری کنید تا احتمال چنین محدودیتی برای وب سایت شما واقعه نیفتد.

ادله دیگری که بر میزان خزش تاثیر می‌گذارد، تعداد تارنما های فعالی است که بر روی یک هاست دارید. در‌این‌صورت‌ وصل شدن به سرور دشوار می‌شود و قابلیت و امکان خطای بازگشت از سرور را خوا هیم داشت.

در حالت کلی می بایست در لحاظ بگیرید که سرور شما چقدر می‌تواند تعداد درخواست های پیامبر شده سمت سرور را پاسخ گو باشد و چقدر تحمل معیار خزش را دارد.

تقاضای خزیدن  ( Crawl Demand / Crawl Scheduling )

تقاضای خزیدن یا برنامه ریزی خزیدن بر پایه ی ارزش URL میباشد که می‌تواند دست اندرکاران بسیاری را در خود وارد کند برای مثال :

محبوبیت : میزان پیوند های داخلی و خارجی که در صفحه ها خود قرار می دهید، همچنین ترازو جستجو برای سکو بندی تاثیر زیادی دارااست.

نوع شیت : صفحه ها یک تارنما می تواند در گروه بندی تولیدات، صفحه قوانین ومقررات ، تماس با ما و غیره باشد. پس مبتنی بر نوع برگه واهمیت آن‌ها، حق تقدم خزیدن می بایست صورت بپذیرد.

تازگی ( تولید موارد جدیدتر) : به‌روزرسانی ، ساخت محتوای تازه هم در تقاضای خزش تأثیر زیادی دارند.

مثلاً سایت هایی که هر روز محتوای جدید در سایت خود قرار می‌دهند، نسبت به وبسایت های خبری که هر چند ساعت یک بار محتوا ساخت می کنند تعداد خزش کمتری به نسبت نشر محتوا دارا‌هستند.

چرا بایستی به بودجه خزش وبسایت خود مداقه بدهیم

ما درپی این هستیم که موتورهای جستجو بیشترین صفحه های مارا ایندکس و مرور کنند و اما در اسرع وقت این عمل را اعمال بدهند. رایا پارس عنایت بودجه خزش زمانی مهم می شود که باید صفحه های جدید وب سایت شما سریع تر بوسیله موتورهای جستجو مرور شوند.

اکنون در لحاظ بگیرید که میزان دارایی خزش خود را از دست دادید و موتورهای جستجو نتوانستند بخش های مهم وب سایت را کشف کنند. با تمام کارایی هایی که برای وب سایت خود اجرا دادید نتوانستید جایگاه نه در حاصل گوگل بگیرید.

درین‌شرایط‌ می بایست برای موتورهای جستجو انتخاب فرمایید که کدام صفحات عنایت بیشتری دارا‌هستند بخصوص در صورتی‌که صفحه ها سایت بیش از 10,000 برگه می‌باشد.

چطور دارایی خزش تارنما خودم را پیدا کنم

در شرایطی که برای وبسایت خود اکانت کنسول گوگل دارید می‌توانید به قسمت Crawl بروید وبر Crawl Stats کلیک فرمایید. در آنجا تعداد صفحاتی که گوگل آن ها را هر روز مرور می کند را مشاهده کنییید

به منابع سرور خود رجوع کنید

تفحص گزارش های سرور می‌تواند داده های دیدنی را فراهم کند و تعداد خزنده های گوگل که وبسایت شما‌را مرور می کنند را نشان دهد.

که البته می‌توانید این داده ها را با داده هایی که از کنسول گوگل خود بدست آوردید مقایسه نمایید و احتساب های بیشتری را برای یافتن بهترین راهکار دستیابی درجه ای بالاتر را داشته باشید.

سئو میزان دارایی خزش را چطور اعمال دهیم

seo دارایی خزش خط مش های زیادی دارد البته در اینجا 8 مورد اصلی را گردآوری کردیم که باید به آنها دقت نمائید و مورد ها مذکور را رفع کنید.

1. پارامترهای فیلتر تولیدات در URL

URL های با پارامتر نباید برای موتورهای جستجو قابل دسترس باشند چون میتوانند تعداد نامحدودی URL ایجاد کرد کنند. این آدرس ها معمولاً هنگام به کارگیری از فیلتر های مال در فروشگاه اینترنتی به کار گیری می‌شوند  به عنوان مثال  در اینجا بایدمطمئن شوید در دسترس موتور های گوگل نباشد.

برای اعمال این عمل باید در سرچ کنسول گوگل یا ابزار وب مستر بینگ استعمال نمائید ، تگ Nofollow  به لینک های فیلتر اضافه فرمائید یا در Robots.txt دستور عدم دسترسی بدین آدرس را بدهید.

2. محتوای تکراری

راه‌های زیادی برای غربت از محتوای تکراری می باشد، از جملهً وقتی که می خواهیم آدرس صفحه ای را وارد کنیم به HTTP ، HTTPS وWWW لینک ها اعتنا کنیم. صفحه ها حاصل جستجو داخلی در Robot.txt غیر قابل دسترسی کنیم و مفاد دیگر که می‌تواند دارایی خزش را seo می کند بایستی صورت پذیرد.

3. محتوا با کیفیت تحت

بهتر می باشد سعی کنیم محتوایی کیفیت عالی ذیل را به حداقل برسانیم یا در صورت قابلیت و امکان چنین محتوایی ساخت نکنیم. این صفحات برای موتورهای جستجو به هیچ عنوان جذاب نیست، به احتمال بالایی مرور نمی شود.

4. پیوند های شکسته 404 و ریدایرکت وقت گیر

پیوند های شکسته 404 و ریدایرکت وقت گیر سبب می‌شوند که ربات های جستجو کرول خود را غیروابسته کنند. گوگل مانند مرورگرها حداکثر تا 5 تغییر و تحول مسیر را در یک خزیدن دنبال می کنند که ولی ممکن می باشد دوباره خزیدن را اجرا دهند.

با این موقتا پیشنهاد میکنیم از تغییر‌و تحول مسیر های زنجیره ای به طور کامل خودداری کنید و استفاده از ریدارکت ها را به دستکم برسانید.

5. آدرس URL های نادرست را در پوشه نقشه وب سایت  خود قرار ندهید

تمامی آدرس هایی که در فولدر XML سایت قرار می دهید باید فهرست بندی باشند، در حقیقت موتورهای جستجو به شدت به نقشه های XML تکیه می کنند تا کل صفحه های شمارا پیدا کنند.

در صورتی‌که نقشه سایت دربرگیرنده صفحاتی که وجود ندارند یا ریدایرکت باشد، میزان دارایی خزش شما هدر می رود باید آدرس های ایندکس نشده خود را پژوهش فرمایید.

چه‌گونه گزارش های نقشه سایت را در سرچ کنسول پیدا کنیم؟

وارد اکانت سرچ کنسول گوگل شوید

روی زبانه Crawl کلیک نمایید

در قطه پایان روی زبانه Sitemaps کلیک نمائید

یکی طرق دیگر که می‌توانید میزان دارایی خزش خود را بهینه سازی نمائید تقسیم نقشه وبسایت XML است. از جمله می توانید برای هر مورد از بخش های سایت، نقشه XML غیروابسته ساخت‌و‌ساز نمایید.

با این کار در‌صورتی‌که قسمت A وبسایت 500 پیوند داشته باشد و 480 ایندکس شده می توانید مطمئن باشید که موتورهای جستجو به خیر تارنما شمارا مرور می کنند. درصورتی که در بخش  B سایت از دربین این 500 لینک صرفا 120 آنها ایندکس شود باید به این موضوع توجه نمایید چه لینک و پیوند هایی در این بخش وجود داراست و چقدر در بهینه سازی وبسایت التفات دارااست.

در صورتی‌که که مداقه چندانی ندارد به سئو میزان دارایی خزش بخش های دیگر بپردازید.

6. صفحه های با سرعت لود تحت

زمانی که صفحه های بار زیاد دارا هستند یا در طی زمانبر بارگذاری میگردند، موتورهای جستجو کمتر می توانند این صفحه های را مرور کنند. پس چنانچه زمان لود سایت بالاتر از 2 ثانیه می باشد می بایست به امداد ابزار هایی مثل Pingdom ، WebPageTest یا GTmetrix پژوهش شوند.

یک تارنما بایستی مرتباً سرعت خود را بررسی کند تا سرعت معدود صفحه ها مانع کسب‌وکار آنلاین نشود.

7. تعداد صفحه های ایندکس نشده را کاهش دهید

در‌حالتی که وبسایت تعداد زیادی شیت ایندکس نشده در دسترس موتورهای جستجو داشته باشد، می بایست آنان‌را پیدا کنید و دلیل ایندکس نشدن صفحات را رفع فرمائید. صفحه ها غیر قابل ایندکس انواع پایین را دارا‌هستند:

ریدایرکت ( 3xx )

صفحه های ناموجود ( 4xx )

صفحاتی که خطای سرور دارا هستند ( 5xx )

آدرس هایی که ایندکس نمیشوند ( تگ Noindex یا URL کنونیکال دارند )

8. تغییر‌و تحول ساختار پیوند داخلی بد

چگونگی لینک هایی که به صفحه ها خود می دهید نقش زیادی را در سئو دارایی خزش داراست، به گونه ای که باید ساختار لینک و پیوند داخلی را در یک قاعده ای رعایت فرمایید. به عنوان مثالً تعداد دو یا سه لینک داخلی به صفحه ها دیگر بدهید و بک پیوند های خود را بهبود دهید.

از ساختار لینک داخلی سلسله مراتبی اجتناب کنید، چون در اکثر زمان ها مورد ها مرور نمی‌شوند. ( بخصوص صفحات انتهای سلسله مراتب )

به عنوان مثال اگر نوشته‌ی‌علمی ای که 3 سال پیشین آن را در سایت خود قرار دادید که ترافیک ارگانیک بالایی داراست. می بایست در محتوای نو آن را لینک دهید. البته شما می‌توانید برای بهبود پیوند های داخلی وبسایت نوشته‌ی‌علمی لینک داخلی چه تاثیری در seo وبسایت دارااست در بلاگ آی وحید را تفحص نمائید و از التفات و طریق ساخت‌و‌ساز لینک های داخلی اطلاع پیدا نمائید.